Aziz telah berkahwin sebanyak dua kali, beliau berkahwin dengan pelakon Khatijah Abu Hassan pada 1967 dan bercerai pada 1990, pasangan ini dikurniakan tiga anak. Beliau kemudiannya berkahwin dengan Datin Zunita Mohamed pada 1991 dan dikurniakan tiga lagi anak.[3] Beliau meninggal dunia akibat kanser prostat di kediamannya di Bandar Putra Permai, Seri Kembangan pada jam 11 malam, 1 Julai 2016 pada usia 75 tahun.[4] Beliau meninggalkan balu, Datin Zunita dan enam anak yang semuanya lelaki. Jenazah beliau disembahyangkan di Masjid Universiti Putra Malaysia (UPM), Serdang, Selangor dan disembahyangkan sekali lagi di Masjid Kariah Kampung Bongek dan dikebumikan di Tanah Perkuburan Islam Kampung Bongek Acheh, Rembau.[5][6] [7]